amek zbudowany został w połowie XV wieku przez Zbigniewa Bąka herbu Zadora na miejscu wcześniejszego drewnianego założenia obronnego.  Był to kamienny budynek powstały na planie prostokąta, posiadał dwie lub trzy kondygnacje oraz wieżę bramną. Wjazd prowadził przez zwodzony most a całość otaczały wały.
  Po śmierci Zbigniewa Bąka, syna budowniczego zamku (1489 r.) zamek przeszedł w ręce Jarosława Łaskiego męża córki Zbigniewa (od 1511 roku) a następnie zamieszkiwała na nim rodzina Małachowskich (od XVI wieku). O jednym z nich tak pisze Jędrzej Kitowicz w swoim "Opisie obyczajów" :..Adam Małachowski, krajczy koronny; tego możno nazwać zabójcą ludzkiego zdrowia, wielu albowiem ludzi zalanych winem poumierało, niektórzy nawet w jego domu, zasnąwszy raz na zawsze snem śmiertelnym. To rzecz dziwna, że takowe przypadki, w oczach jego darzone, nie odmieniły w nim szalonego zwyczaju pojenia ludzi gwałtownie i zalewania winem. Miał u siebie w Bąkowej Górze kielich wielki półgarcowy, na którym wyrznięte były trzy serca z podpisem: "corda fidelium". Używał pod czas tego kielicha do bankietów i wotów wielkich, ordynaryjnie zaś trzymał go od przywitania każdego, kto pierwszy raz był u niego w Bąkowej Górze. Jeżeli taki gość przybył z rana, co prędzej sporządzono mu śniadanie, aby miał po czym pić, ponieważ ten kielich nikogo nie mógł minąć. Skoro go oddano w ręce gościowi, przestrzeżono zaraz, że powinien był wypić duszkiem, inaczej niech cokolwiek nie dopił, natychmiast mu pełno dolewano póty, póki nie wypił; to gwałtowne picie więcej szkodziło zdrowiu aniżeli sam zbytek wina. Z panów wielkich, mniej sposobnych do pijaństwa, z trudna który odważył się nawiedzić krajczego; a jeżeli być u niego wyciągał koniecznie jaki interes, to wprzód wyrobił sobie od niego rewers na kształt salvum conductum, pod najcięższymi zaklęciami, jako do pijaństwa, a mianowicie do kielicha corda fidelium, nie będzie przymuszany."
    W XVIII wieku zamek został opuszczony i zaczął popadać w ruinę.
  Obecnie część murów została zrekonstruowana lecz budowla znajduje się w rękach prywatnych.
  Budowla w Bąkowej Górze właściwie bardziej podobna jest do dworu obronnego niż do zamku.